Ông là con duy nhất của Louis Henry I và Landgravine Caroline of Hesse-Rotenburg. Khi còn trẻ ông cưới Charlotte-Godefried de Rohan-Soubise (1737-1760), con gái một người bạn vua Louis XV, Charles de Rohan-Soubise. Hai người có một con trai là Louis Henri Joseph và một con gái là Louise-Adélaide de Condé